為拓展顯示技術於醫療與車載應用領域之附加價值,本實驗室將觸覺回饋與AI手勢辨識互動技術整合融入至智慧顯示科技中的Micro LED顯示器、混合實境(Mixed Reality, MR)眼鏡與浮空投影車載介面,成為前瞻顯示應用必備的指標。 智慧醫療顯示領域面上,本實驗室榮獲科技部「前瞻智慧顯示專案計畫」兩年共3040萬元補助,開發應用於病理資訊顯示平台之超音波浮空觸覺回饋技術與MR互動技術。系統介面提供高縮放倍率之影像與多種操作功能,其顯示之虛擬影像將疊合空間中觸覺回饋之虛擬物件,使醫師可藉由具觸覺回饋且可視化虛擬物件之介面直覺地操作數位病理平台,當醫師欲點選標註功能之虛擬圖標,可透過超音波觸覺回饋,體驗如點擊真實物件之感受,並於操作過程中,適時給予互動回饋,以減少醫師操作上之認知誤差避免判讀錯誤等情形產生。此外,本團隊研製一Micro LED顯示面板以提升顯示器之顯像效果,透過內部畫素電路設計,使面板具自身亮度偵測及灰階亮度補償功能,完成高均一度、高對比度、高可靠度之病理顯示平台,提供醫師高品質之顯示畫面,以利醫師在觀察病理切片資訊時可做出正確判斷而不受畫面品質干擾。本團隊整合上述觸覺回饋系統、MR互動技術以及Micro LED顯示平台,提出一超音波觸覺互動之Micro LED 病理互動系統,透過醫師實際操作本系統取得意見回饋,根據該回饋對顯示器畫面進行色彩調整,而系統方面則進行參數校正與最佳化調整,提高互動裝置之操作靈敏度與觸覺真實度以優化使用者體驗,確認本系統操作流程符合現今醫療院所及醫師之需求。 車載顯示領域面上,為提升車載電子系統之操作安全性與互動性,本實驗室開發應用於浮空投影之非接觸式超音波觸覺回饋系統,整合浮空投影、超音波觸覺回饋、手勢辨識及行車資訊之車載互動介面,達成3D物件之浮空觸覺回饋,駕駛可藉由手勢與浮空介面中的虛擬元件進行互動,並可以在操作同時體驗到由超音波觸覺回饋裝置產生的細緻觸感回饋,無需注視畫面亦能準確控制車載系統,提升駕駛體驗及行車安全,實現互動技術應用於智慧顯示車載系統之典範。 |
圖1、智慧顯示技術開發 |